Oh, Inverted World es el primer álbum de The Shins, lanzado el 19 de junio de 2001 bajo Sub Pop Records, obtuvo buenas aclamaciones por parte de la crítica, Omnibus Records sacó una versión inicial distribuida por Darla, luego Sub Pop repintó el vinyl. Solamente el logo de Sub Pop aparece en la imprenta del disco. El título del álbum es por la segunda canción de dicho álbum, "One by One All Day".

El álbum contiene las canciones "Caring Is Creepy" y "New Slang", las cuales aparecieron en la película de 2004, Garden State. "Oh, Inverted World" se colocó en la posición #35 en la encuesta Pazz & Jop en el 2001.

Los sencillos del álbum son "New Slang", lanzado en 2001, y "Know Your Onion!", lanzado en 2002.